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责任 计量 视角 


结论 ] 基 于 时 间 线 的 关键 词 、 作 者 二 加 视图 表明 :计量 
影响 力 为 半径 、 引 用 探索 为 根 


责任 计量 进行 科学 评价 治理 是 建立 健康 学 术 生 态 系 统 的 必 由 之 


fi £2: [目的 /意义 ] 以 负责 任 计量 三 大 基础 框架 《旧金山 宣言 )《 莱 顿 宣言 《计量 潮 报告 ) 为 出 发 点 ,就 负 
下 科学 评价 发 展 趋 向 进行 解读 。[ 方 法 /过 程 ] 基 于 Web of eet oe VOSviewer 将 2012 — 2020 年 论文 和 核心 
作者 进行 可 视 化 ,以 反映 该 领域 历时 研究 热点 变化 。 
变革 正在 进行 中 ,并 呈现 以 研究 质量 为 圆心 、 人 PAM IEA HE 
基 、 补 充 计量 为 参照 的 发 展 趋向 。 结 论 指 出 
路 ,而 负 E AAS Oe 与 计量 文化 的 变革 。 
BI: 负责 任 计量 科学 评价 《旧金山 宣言 》 CERES) 《计量 潮 报告 》 


AE. C250.252 
GEL. 10. 1326/7. issn. 0252 -3116. 2021. 09. 002 
ores 


研 评价 的 地 界 正 在 发 生变 革 。2015 年 ,英国 谢 


em ea a a) im oC 
zit i 出 负责 任 计 量 (responsible metrics ) 的 概 
ZD. 该 报告 与 (关于 科研 评价 的 旧金山 宣言 ) (简称 
“QM ues)” ) 《 莱 顿 宣言 ) 共 同 构筑 了 负责 任 计 
ARTS: RHEE > 2018 44, J. Wilsdon 又 在 英国 《 卫 报 》 
> 出 ;计量 潮 正在 向 负责 任 计量 洒 动 中 。 本 文 
三 大 纲领 性 文献 出 发 ,就 负责 任 计量 视角 下 
MEA RIEMEN, 


1 相关 背景 回顾 


《计量 潮 报 告 》 为 2014 年 英国 基于 计量 的 高 等 教 
育 评 价 体系 REF (卓越 科研 评价 框架 ) 首次 实施 
物 。 其 中 ,依据 欧盟 “负责 任 研究 与 创新 "的 科研 治 
框架 提出 ener alee ens snail 
负责 任 计 量 ,并 将 其 界定 为 精确 数据 为 基础 的 稳健 性 、 
体现 学 科 间 差异 的 多 样 性 .评价 方法 的 多 维 性 .数据 收 
集 和 分 析 过 程 的 透明 性 .不断 更 新 的 自 反 性 ,由 此 诠释 
了 其 内 涵 , 并 奠定 了 负责 任 计量 思想 的 格局 " 

《旧金山 宣言 形成 于 2012 Æ 12 月 16 日 在 旧 金 
山 召 开 的 美国 细胞 生物 学 学 会 ( American Society for 


Cell Biology) 35 75 届 年 会 。 其 主张 开发 不 依赖 期 刊 影 
响 因 子 的 稳健 高效 的 评估 方法 ,反映 出 科学 共同 体 纪 
局 以 刊 评 文 改变 科研 产 出 质量 评价 方式 的 强烈 呼 


[3] 
声 


o 


《 莱 顿 宣言 》 源 于 2014 年 在 荷兰 莱 顿 召开 的 国际 
科学 技术 指标 ( Science and Technology Indicators , 简称 
STI) 大 会 上 美国 佐治 亚 理 工学 院 公 共 政 策 教 授 D. 
Hicks 提出 的 合理 利用 科学 评价 指标 的 七 原则 。2015 
年 4 月 ,D. Hicks 与 莱 顿 大 学 科学 技术 研究 中 心 执行 
主任 P. Wouters、 副 主任 L. Waltman 将 其 扩充 为 10 
条 ,并 在 4 自然》 杂志 上 发 表 , 其 中 凝练 了 基于 指标 的 
科研 评价 规范 ,并 预示 着 科研 评价 的 变革 正在 酝酿 之 
中 一。 

上 述 3 篇 纲领 性 文献 代表 了 科学 评价 的 新 思维 ， 
构筑 了 负责 任 计量 的 思想 空间 , 绳 墨 了 科学 评价 的 新 
规范 。 在 其 指导 下 ,许多 国家 科学 评价 实践 中 都 遵循 

了 负责 任 计 量 原 则 ,P. Wouters, L. Waltman, L. Born- 
mann .M. Thelwall 等 计量 学 家 在 补充 计量 ( Altmetrics) 
应 用 、 研 究 影响 力 等 问题 的 探索 中 也 将 负责 任 计 量 原 
则 融入 其 中 “”。 为 此 ,2018 年 召开 的 第 23 届 STI 大 会 
E,L. Waltman 做 了 题 为 “负责 任 计量 ”的 主旨 发 言 。 
同年 ,英国 负责 任 计量 论坛 发 布 了 题 为 “计量 文化 转 
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. 负责 任 计 量 与 科学 评价 趋向 [可 .图 书 情 报 工作 ,2021,65(9) :16 - 22. 


折 " 的 调查 报告 "9。 
与 实践 带 来 的 改变 


2 2012 -2020 历时 研究 热点 可 视 化 


为 了 呈现 近年 来 负责 任 计量 研究 热点 及 其 发 展 趋 
势 , 本 文 利 用 WoS( Web of Science) ,借助 荷兰 莱 顿 大 
学 N. J. V. Eck „L. Waltman 基于 JAVA 开发 的 VOS- 
viewer 将 2012 - 2020 年 论文 和 核心 作者 可 视 化 1。 该 
软件 核心 思想 是 通过 共 现 聚 类 及 其 可 视 化 分 析 ,展现 
知识 领域 的 结构 、 进 化 、 合 作 等 关系 ,从 而 揭示 研究 热 
点 \ 作 者 集团 。 检 索 日 期 为 2020 年 6 月 26 日 ,检索 式 
为 :TS = 
uation * " OR TS = " research assessment * " OR TS = 


"OR TS = 


可 见 , 负 责任 计量 给 科学 评价 理论 


"responsible metric * " OR TS = " research eval- 


science policy x "OR TS =" impact factor * 
al impact factor * "OR TS = "citation impact * " OR 
TS==" altmetric * "OR TS =" 
T§O" scholarly impact * "OR TS = 
S =" citescore * " AND Publication years = 2012 — 


article level metric * " OR 


"academic impact * " 


a 
2020: and web of science categories = information science 


artide-leve Metics 


wider impacts oee” review wos Usage 
rejection rates £1090pr me 

bock impac:assessment e 

online attention 


20230 


characteristic Sores and scal 
° 


. 
© academic s@rch engines corllate 


library science, 检索 获得 论文 1 778 篇 ,进而 选取 基于 
时 间 线 的 关键 词 ,作者 麦 加 视图 进行 可 视 化 ,以 反映 该 
领域 历时 研究 热点 的 变化 和 发 展 趋势 。 
由 图 1、 图 2 可 清晰 看 出 ,这 一 波 演化 路 径 为 :以 期 
刊 影响 因子 、 网 络 计 量 探索 为 起 点 ,逐渐 向 科研 评价 、 
科技 政策 .研究 质量 、 人 研究 人 员 研 究 过 渡 , 并 于 近期 向 
引用 影响 力 ( 含 学 科 规 范 化 引文 影响 力 ) 、 补 充 计量 
(应 用 ) 合作 与 创新 研究 延伸 。 基 于 时 间 线 的 作者 释 
加 视图 则 表明 L. Waltman 、P. Ingwersen ,R. Rousseau 、L. 
Leydesdorff \L. Bornmann, M. Thelwall, H. F. Moed, W. 
Glanzel 等 成 为 其 中 核心 人 物 , 而 V. Lariviere K. 
Kousha R. Haunschild 成 为 近期 活跃 分 子 。 那 么 ,我们 
应 该 如 何 解读 上 述 结 果 ? 


3 ”科学 评价 发 展 趋势 解读 


图 1 勾画 出 负责 任 计量 背景 下 科学 评价 的 发 展 轨 
迹 ,并 呈现 以 研究 ( 含 研究 质量 \ 研 究 人 员 、 学 科 差 异 
性 ) 为 圆心 ,以 影响 力 ( 含 引用 影响 力 、 社 会 影响 力 、 补 
充 计量 应 用 ) 为 半径 的 特质 。 作 为 科学 计量 史上 具有 
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图 2 2012-2020 年 负责 任 计量 
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EREE ERER ARE EE E 
HENE ,并 预示 着 科学 评价 的 发 展 趋势 ,下 文 将 结合 
责任 计量 实践 对 此 作出 具体 分 析 。 

sQ 以 研究 质量 为 中 心 

加 图 1 中 到 类 形成 的 “研究 质量 " 徐 及 近期 科研 评价 
演 绕 说 明了 负责 任 计量 以 研究 为 圆心 的 趋势 。 从 根本 
上 到 说 ,作为 欧盟 “地 平 线 2020" 计 划 以 负责 任 研究 与 
创新 理念 进行 研究 治理 在 科学 评价 领域 的 延伸 ,负责 
任 鲜 量 自 出 现 之 日 起 即 与 科学 研究 结 下 不 解 之 缘 。 
《 恰 优 山 宣 埋 》 亦 旨 在 建立 “以 研究 为 中 心 ”的 评估 方 
D an, 
机 进而 改变 整个 科研 系统 ,对 此 我 们 要 有 充分 的 预 
期 " 。 它 向 人 们 敲 响 了 警钟 ,提醒 人 们 审慎 对 待 评价 与 
研究 之 关系 。 然 而 , 自 20 世纪 后 半 叶 出 版 商 竞 争 的 
加 剧 ,异化 了 影响 因子 选刊 的 初衷 ,致使 期 刊 在 原 有 注 
册 . 认 证、 传播 和 保存 基础 上 增加 第 五 项 功能 , 即 评价 ， 
并 逐渐 演绎 为 研究 论文 质量 的 标签 。“ 以 刊 评 文 "“ 量 
化 至 上 ” ,简单 粗 暴 的 “计件 制 "评价 方式 偏离 了 科学 
评价 的 目标 ,忽视 了 评价 与 知识 生产 相互 作用 的 复杂 
方式 。 由 此 ,学 术 生 态 系 统 要 素 之 研究 人 员 、 科 学 研 
究 . 期 刊 如 俄罗斯 套 娃 般 被 向 套 在 基于 期 刊 影响 因子 
的 评价 体系 中 ,论文 成 为 学 术 界 的 “ 硬 通 货 " ,影响 因 
子 等 同 于 “论文 质量 "成 为 “无 需 证 明 的 公理 "" 。 捷 
克 和 意大利 的 一 些 资助 机 构 要 求 申请 人 在 其 出 版 物 旁 
列 出 影响 因子 ; 比利时 用 于 向 大 学 分 配 资金 的 公式 包 
括 依 据 影响 因子 的 加 权 ; 巴 西 教育 部 系统 Qualis 使 用 


研究 论文 作者 一 加 聚 类 视图 


影响 因子 确定 资金 分 配 ”。 对 于 研究 质量 的 忽视 , 致 
使 科研 人 员 以 牺牲 创新 性 研究 为 代价 不 得 不 摘 取 “ 低 
枝 果实 ”, 而 不 敢 提 出 大 胆 假 设 ,以 求 在 影响 力 高 的 期 
刊 上 稳妥 地 发 表 。 由 此 CNS(《 细 胞 《自然 《科学 》) 
“ 拜 杂 志 教 "盛行 ,在 权威 期 刊 上 发 表 成 为 个 人 主要 出 
版 策略 ,科学 研究 严重 脱离 了 默 顿 科学 精神 的 轨道 ,最 
终 科学 研究 事业 为 其 埋单 。 究 其 原因 ,漠视 研究 质量 
的 错误 导向 使 然 。 由 此 再 一 次 验证 了 J Lane 那 句 名 
言 :偏颇 的 计量 将 产生 偏颇 的 科学 "”。 人 们 不 禁 质 
疑 : 以 发 表 媒 介 蔡 代 研 究 质量 的 评价 意义 何在 ? 

因此 ,《 旧 金山 宣言 ) 指 导 委 员 会 主席 、 英 国 帝 国 
理工 学 院 结构 生物 学 家 S. Curry 在 接受 《自然 采访 
时 曾 表示 ,“ 对 于 影响 因子 的 使 用 ,都 应 该 和 香烟 一 样 
附带 明确 的 警示 语 ,其 是 诸多 现行 学 术 评 价 体系 之 恶 
的 根源 。” "可见 ,负责 任 计量 力主 回归 科研 质量 的 真 
正 宿主 :科研 本 身 。 不 仅 如 此 ,在 2020 年 3 月 召开 的 


英国 图 书 情报 科学 文献 计量 分 会 年 会 上 ,REF2021 指 
导 小 组 主席 、 英 格 兰 研究 部 主管 S，Hil 教授 在 题 为 


“未 来 研究 评价 的 四 个 驱动 因素 ”的 发 言 中 ,将 研究 与 
研究 文化 列 入 其 中 两 个 要 素 , 由 此 释放 了 重要 信号 :以 
研究 与 研究 质量 为 圆心 的 趋势 将 持续 下 去 。 
3.2 ”以 研究 人 员 为 根本 

在 以 研究 为 圆心 的 场 域 下 ,图 1 中 在 2017 年 初出 
现 * 研 究 人 员 ” 聚 类 复 , 由 此 表明 负责 任 计量 对 于 研究 
人 员 ( 含 女性 研究 人 员 ) RE. L. Bornman 曾 以 
“科学 界 的 拟态 ”深刻 揭示 了 研究 人 员 对 科学 评价 指 
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标的 模拟 行为 。《 计 量 潮 报 告 ) 则 援引 帝国 理工 学 院 
教授 之 殉 指 出 :“ 错 误 的 评价 标准 扭曲 了 我 们 的 行为 、 
决定 了 我 们 的 职业 生涯 ,甚至 将 导致 坎特伯雷 教堂 大 
主教 所 谓 大 学 里 新 的 野蛮 。”" 客观 而 言 ,在 基于 影响 
因子 的 科学 评价 体系 中 ,出 版 商 资助 方 .研究 机 构 . 研 
RAR MR“ WS AGE” ,但 是 出 版 商 通过 与 影响 因子 
捆绑 ,资助 方 则 通过 设计 游戏 规则 占据 主导 ,而 研究 人 
员 只 能 届 从 于 既定 评价 指标 的 困 园 。 简 单 粗暴 科研 管 
理 方式 下 的 “指标 依赖 "意味 着 出 版 优 于 科学 发 现 ,于 
是 科研 人 员 抑制 作为 科学 研究 原动力 之 好 奇 心 , 为 迎 
合 指标 而 将 研究 成 果 指标 最 大 化 。 统 计 表 明 , 德 国 研 
究 人 员 已 经 改变 自己 的 出 版 策略 ,将 论文 发 表 在 高 影 
响 力 英语 期 刊 上 以 增加 论文 的 被 引 ;澳大利亚 在 SCI 
论 交 数量 节 节 攀升 的 同时 ,被 引出 现 明显 下 滑 ;美国 布 
BAKE A. B. Wagner 甚至 提出 “被 引 或 者 出 局 ” 
(Get Cited or Perish) 作为 出 版 或 者 出 局 的 升级 版 ,并 
成 田 科 研 人 员 的 座右铭 。 生 存 的 压力 .对 于 影响 因子 
的 和 i 迷 ”. 不 正当 激励 的 响应 与 博弈 助长 了 科学 界 的 
授 郴 取 巧 ,导致 了 拆 分 发 表 .名誉 作者 .引用 卡特 尔 ( 引 
用 机 盟 ) 和 科研 造假 等 学 术 不 端 。 经 济 学 中 古 德 哈 特 
EEE Goodhart’ s law) 的 科学 评价 版 本 可 谓 对 这 一 现 
针 时 好 的 注解 : 当 一 个 指标 变 成 目标 ,那么 它 将 势必 失 
ABAAA ERATE EZP, 
.二 鉴于 科学 评价 .科学 共同 体 、 科 技 政策 .科学 研究 
的 重合 效应 ,作为 传统 科学 评价 的 道 向 思维 ,负责 任 计 
量 湿式 下 的 科学 评价 加 强 了 与 研究 人 员 的 对 话 , 将 科 
研 太 员 作为 参考 系 纳入 科研 评价 体系 之 中 。2017 年 ， 
科 伪 唯 安 .荷兰 菜 顿 大 学 科技 评价 中 心 召 集 研究 人 员 
召开 题 为 “反思 影响 因子 :期 刊 评价 的 新 途径 "的 研讨 
会 ;2019 年 , 兰 德 欧洲 基于 3 600 名 研究 人 员 的 调查 形 
成 题 为 (研究 格局 的 变化 及 对 未 来 国家 研究 评估 的 思 
考 ) 的 报告 ,以 供 REF2021 参考 ;霍华德 休 斯 医 学 研究 
所 将 北美 及 欧洲 30 多 个 研究 机 构 的 研究 人 员 聚 集 一 
堂 , 共 同 探索 《旧金山 宣言 》 的 实施 。 如 今 ,作为 科学 
共同 体 对 于 科学 评价 “ 软 约束 "的 三 大 纲领 性 文献 , 逐 
渐变 成 欧盟 及 澳大利亚 英国 等 国 的 硬 政策 。 此 番 操 
作 意 味 着 对 于 计量 文化 .激励 机 制 的 探索 与 思考 ,并 显 
露出 以 人 为 本 的 负责 任 计量 文化 的 端倪 。 
3.3 ”以 学 科 规 范 化 为 导向 

伴随 负责 任 计量 实践 的 深入 以 及 以 研究 为 圆心 的 
趋势 进一步 扩散 ,图 1 出 现 学 科 规范 化 聚 类 秘 , WoS X 
献 检索 列表 中 field-normalization ( 即 学 科 归 一 化 ) 亦 作 
为 高 频 词 出 现 ,由 此 折射 出 负责 任 计量 理论 与 实践 控 


索 中 对 于 监 学 科 评 价 的 关注 。 从 根本 上 说 ,负责 任 计 
量 中 的 学 术 影 响 力 规范 化 “ 热 " 源 于 2014 年 英国 REF 
实施 中 不 同学 科比 较 之 需 。 由 于 偏 态 性 是 引用 的 特 
质 , 即 因 引 用 密度 (citation density ) 的 差异 ,被 引 频 次 依 
学 科 、 出 版 年 .文献 类 型 呈 高 度 偏 态 分 布 ,1979 4 E. 
Garfield 即 指出 :不 同学 科 的 原始 被 引 频 次 不 能 直接 进 
行 比 较 , 因 此 学 科 规范 化 成 为 一 种 必然 ”。 作 为 规范 
化 方法 之 一 ,学 科 归 一 化 目的 即 在 于 ,通过 将 不 同 变化 
范围 的 数值 映射 到 同一 量 纲 下 , 即 [0 ,1] 或 者 [ -1,1] 
区 间 内 ,以 消除 学 科 因 素 给 科学 计量 带 来 的 噪音 。 
2 作者 三 加 视图 中 以 RHaunschild 为 核心 的 近期 活跃 
研究 作者 集团 的 出 现 进一步 表明 负责 任 计量 实践 中 对 
于 学 科 规 范 化 算法 的 探索 。2016 年 ,美国 国立 卫生 研 
究 院 R. Haunschild 提出 RCR( 相 对 引用 比 ) ,其 中 基于 
共 引 网 络 动态 定义 论文 所 属 学 科 , 并 实现 引用 指标 的 
归 一 化 ,由 此 规避 了 因 学 科 的 层级 结构 及 动态 发 展 对 
于 CNCI( 学 科 规 范 化 引文 影响 力 ) 等 指标 的 束缚 ,从 而 
为 跨 学 科 ,特别 是 交叉 学 科研 究 成 果 引 用 影响 力 评价 
与 比较 提供 了 新 的 解 题 思 路 。 二 容 置疑 ,交叉 学 科研 
究 在 促进 团队 合作 .解决 挑战 性 问题 .整合 零散 的 学 术 
世界 . 重 塑 学 术 格 局 方面 具有 显著 的 优势 ,然而 目前 的 
悖 论 是 :政府 鼓励 交叉 学 科研 究 ,但 由 于 其 评价 方法 的 
非常 规 性 ,交叉 学 科研 究 的 价值 常常 受到 延 退 认可 ,其 
至 被 漠然 置 之 ” 。2016 年 ,英国 国家 学 术 院 院 长 . 世 
界 银行 首席 经 济 师 L. Stern 在 为 REF2014 所 做 《斯 特 
恩 评 论 》 中 强调 “交叉 学 科研 究 在 解决 全 球 社会 ,经 
济 , 生 态 和 政治 等 复杂 问题 方面 的 重要 作用 ”, 同 时 也 
表示 出 一 丝 担 忧 ,认为 交叉 学 科研 究 在 评审 中 受到 不 
公正 的 待遇 '"。 现 今 虽 然 由 从 事物 理学 和 生物 学 交 
叉 科 学 研究 的 剑桥 大 学 教授 D. A. Donald 组 建 
REF2021 交叉 学 科研 究 评价 小 组 ,并 承诺 在 评价 中 将 
保持 不 偏 不 倚 的 政策 ,但 是 REF2021 提交 的 相关 案 
例 申请 仍然 远 远 低 于 预期 ,这 一 切 似乎 都 在 拷问 科学 
评价 制度 。 同 时 ,图 1 中 2017 ERIE BI R IER 
形成 .对 于 CNCI 等 基于 先 验 分 类 的 学 科 规 范 化 引文 影 
响 力 的 探索 ,以 共 引 聚 类 识别 研究 领域 的 RCR 等 指标 
的 开发 ,进一步 反映 出 如 何 理 解 和 支持 多 样 化 和 动态 
的 学 术 研 究 生态 系统 .特别 是 交叉 学 科研 究 ,成 为 负责 
任 计量 的 着 力 点 之 一 。 

3.4 ”以 影响 力 为 半径 

图 1 表明 负责 任 计量 浪潮 下 的 科学 评价 在 以 研究 
为 核心 向 外 蔓延 的 同时 ,影响 力 成 为 这 一 波 的 关键 词 。 
检索 结果 中 ,1 778 篇 文献 中 415 篇 标题 中 含有 影响 
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H,L. Waltman 的 《引用 影响 指标 文献 综述 》 一 文 在 同 
一 出 版 年 论文 中 以 284 次 高 频 被 引 , 皆 证 实 这 一 波 对 
于 研究 影响 力 的 关注 。 事 实 上 ,以 经 济 学 中 成 本 效益 
理论 为 准绳 ,无 论 是 REF2014 抑或 REF2021 ,影响 力 都 
是 其 中 主旋律 。2014 年 首次 以 影响 力 为 重心 展开 评 
估 , 并 将 其 界定 为 :对 学 术 界 以 外 的 经 济 、 社 会 .文化 、 
公共 政策 .服务 .健康 环境 或 生活 质量 等 方面 产生 的 
影响 和 收益 ,英国 科技 部 大 臣 和 财政 大 臣 特 委托 L. 
Stern 为 REF2014 做 了 《斯 特 恩 评论 》,REF2021 实施 细 
则 中 则 进一步 加 大 了 影响 力 的 权重 5 。 兰 德 欧洲 公 
司 所 谓 “ 通 过 强化 影响 力 使 科学 ,技术 和 创新 给 社会 和 
经 济 带 来 的 收益 最 大 化 ”的 理念 一 语 道破 了 此 种 操作 
的 济源" 。 具 体 地 说 ,基于 负责 任 计量 的 科学 评价 已 
究 能 力 和 质量 的 关键 手段 和 促进 
| I 杠杆 ,而 实现 这 一 目标 的 路 径 即 是 将 影响 
j 忒 为 重点 ,其 中 将 赌注 押 在 基于 影响 力 的 资源 分 配 
稍 般 构 与 个 人 行为 的 激励 上 。 

学 术 影 响 力 与 社会 影响 力 代表 着 影响 力 评价 的 两 


| 文 即 是 用 来 偿还 研究 债务 的 货币 .代表 着 对 科学 
三 完工 作 或 认 知 的 影响 "的 论断 ,学 术 影响 力 被 量化 为 
引 且 的 “ 因 变量 "" 。 与 此 同时 ,伴随 着 网 络 的 发 展 ， 
影响 力 向 社会 影响 力 扩散 并 被 称 之 为 评价 领域 的 “ 库 
恩 滞 命 """ 。 为 此 ,负责 任 计量 努力 寻求 “引用 等 价 
于 社会 影响 力 的 测度 。 伦 敦 国王 学 院 与 数字 科 
28 al (Digital Science) 对 于 REF2014 中 7 000 个 影响 
zph 


ANSEF BORIS IE, ERT AARIN H EEIE 
2018 年 , 兰 德 欧洲 受 英格兰 高 等 教育 基金 管理 委员 会 
(HEFCE) 之 托 ,发 布 REF 案例 分 析 影响 力 定量 指标 标 
准 ,并 开发 了 由 300 个 问题 构成 的 分 析 建 议 包 Impact- 
Finder, 以 收集 人 研究 对 于 社会 .文化 和 经 济 的 影响 。L. 
Bornmann ,R. Haunschild 运用 聚合 效 度 对 案例 分 析 和 
补充 计量 在 社会 影响 力 测量 结果 方面 的 相似 度 进行 比 
Bel 。 研 究 表明 , 目前 除 专利 技术 影响 、 医 学 临床 影 
响 两 种 引用 当量 的 社会 影响 力 测度 方法 ,案例 研究 是 
唯一 可 行 的 途径 。 鉴 于 引用 是 学 术 影响 力 可 量度 指标 
已 成 为 学 术 界 的 共识 ,社会 影响 力 的 量度 作为 负责 任 
计量 这 一 波 中 新 的 量化 元 素 成 为 探索 中 的 问题 。 
3.5 ”引用 探索 为 准绳 

关于 引用 影响 力 , 图 1、 图 2、 英 国 REF 实践 《 计 
量 潮 报 告 ) 以 及 S. Hi 的 论断 第 表明 :无 论 过 去 、 现 
在 乃至 将 来 ,引用 都 是 科学 评价 的 立足 点 。 具 体 而 言 ， 
在 负责 任 计量 浪 潮 冲击 下 ,引用 依然 是 科学 评价 的 标 


准 夸 码 ,引用 与 学 术 影响 力 的 等 价 关 系 依然 是 科学 评 
价 的 大 前 提 。 究 其 根源 ,首先 ,科学 是 礼品 经 济 ,其 价 
值 由 其 对 知识 总 体 的 贡献 或 者 对 他 人 的 影响 力 来 表 
征 ,同时 由 于 作者 借助 引用 表示 源 自 其 他 研究 人 员 及 
其 成 果 的 影响 ,因此 学 术 影 响 力 与 引用 具有 了 相关 性 。 
其 次 ,引用 的 本 质 即 是 知识 的 流动 , 即 汤 森 路 透 首 席 科 
学 家 H. H. Small 所 请 “引用 是 信息 被 利用 后 留 下 的 
路 标 ”” , 它 展现 了 知识 单元 的 离散 和 重组 、 继 承 和 创 
新 、 演 进 与 升华 的 复杂 过 程 ,由 此 以 引用 为 科学 交流 的 
痕迹 、 影 响 力 为 标识 ,可 以 追溯 科学 发 展 脉络 、 优 化 科 
学 交流 ,推进 科学 研究 。 再 者 ,引文 分 析 可 用 于 识别 和 
绘制 研究 前 沿 .定义 学 科 和 新 兴 专 业 、 确 定 研 究 计划 和 
项 目的 跨 学 科 特 征 和 影响 。 因 此 ,基于 科学 论文 网 络 
揭示 科学 发 展 结构 ,呈现 多 学 科 、 跨 学 科 关 系 , 从 而 扶 
植 . 鉴 别 卓越 研究 ,有 效 指导 科学 资源 配置 。 从 这 一 意 
义 上 说 ,引用 和 引文 分 析 与 科学 评价 的 总 体 目标 具有 
较 高 的 契合 度 。 因 此 ,即使 S，Woolgar 基于 “引用 是 除 
了 科学 影响 力 的 许多 变量 的 函数 "的 论断 对 引文 分 析 
提出 质疑 ,M. H. Macroberts 指责 学 术 界 由 于 因 循 保 
守 的 “ 卡 桑 德 拉 情结 "不 肯 放 弃 引 文 分 析 , 却 始终 没有 
动摇 引用 在 科学 评价 中 的 地 位 。 

应 该 指出 的 是 ,负责 任 计量 下 的 科学 评价 是 在 引 
文 分 析 4.0 的 背景 下 进行 的 。 除 了 RCR 研究 、CNCI 
等 论文 层面 影响 力 等 问题 的 探索 ,全 文本 文献 计量 分 
析 成 为 重头 戏 ,其 中 通过 施 引 文献 与 被 引文 献 之 间 交 
集 的 辨识 ,更 深刻 地 理解 科学 论文 中 的 引用 和 动机 、 更 
准确 地 还 原 科 学 交流 过 程 ,最 终 更 好 地 服务 于 科学 评 
价 成 为 今后 一 段 时 间 内 的 发 展 趋向 。 

3.6 补充 计量 为 参照 

1 中 补充 计量 、 社 媒 计 量 以 及 爱 斯 维 尔 ICSR 
国际 科学 评价 研究 中 心 ) 的 多 元 化 科学 评价 规划 证 
实 补充 计量 在 科学 评价 中 拥有 一 席 之 地 。 自 2010 年 
J. Priem 基于 在 线 科 学 交流 提出 补充 计量 ,AM 值 作 为 
传统 文献 计量 的 补充 进入 关注 的 视野 ,同时 引发 了 人 
们 对 于 计量 方式 的 思考 ,并 催化 了 论文 层面 影响 力 的 
多 维 评价 o 2013 年 4 自然》 影响 力 探索 专辑 中 ,科学 
共同 体 就 影响 力 的 多 维 性 达成 共识 。《 斯 特 恩 评论 》 
亦 呼吁 对 研究 影响 进行 更 广泛 的 定义 ;与 此 同时 ,美国 
司 家 信息 标准 组 织 (NISO) 制 定 了 补充 计量 使 用 标准 ; 
L. Bornmann,R. Haunschild 指出 “《 莱 顿 宣言 十 原则 
对 于 补充 计量 具有 重要 指导 意义 ”” 。J. D. Jenkins W 
将 负责 任 计 量 定义 为 合理 使 用 的 引用 指标 、 补 充 计量 指 
标 及 其 他 定量 评估 手段 的 综合 体 ,从 而 为 补充 计量 作为 


~ 


20 


RA, EH, HMM. 负责 任 计 量 与 科学 评价 趋向 | ]]. 图 书 情 报 工 作 ,2021,65(9) :16 - 22. 


引用 的 参照 系 在 负责 任 评价 中 的 应 用 定 了 调子 ” 。 
然而 ,尽管 一 些 专 家 们 认为 补充 计量 给 学 术 研 究 
及 其 影响 力 计量 方式 带 来 了 革命 性 改变 ,但 是 M. 
Thelwall! H. F. Moed” 等 指出 仅 Mendeley 读者 统 
计 与 引用 统计 、F1000 同行 评议 结果 具有 较 高 的 相关 
性 ,可 以 用 于 影响 力 的 早期 预测 ;而 推 特等 补充 计量 指 
标 主 要 反映 的 “关注 度 ” ,并 非 影响 力 。 因 此 ,补充 计 
量 的 有 效 性 是 悬而未决 的 问题 。 对 此 ,一 方面 ,计量 学 


家 通过 相关 分 析 检 验 其 与 已 有 指标 的 契合 度 , 以 期 解 
读 其 含义 ; 男 一 方面 ,人 们 将 相对 成 熟 的 同 被 引 分 析 、 
CNCI 等 文献 计量 方法 移植 到 补充 计量 中 ,以 期 提高 其 
水 准 , 并 建立 面向 科学 创造 \ 传 播 与 利用 整个 工作 流 的 
多 元 化 科学 评价 方法 。 固 然 ,如 同 负 向 引用 和 过 度 自 


影 啊 因子 的 评价 体系 已 被 称 为 “一 种 不 可 再 忽视 的 癌 
ADE IE" TEPARA” U ,而 中 国 科技 政策 正 
在 笑 步 远离 基于 影响 因子 的 奖励 措施 。 由 此 可 见 , 以 
负责 任 计量 进行 学 术 评价 治理 是 建立 健康 学 术 生 态 系 
统 的 必由之路 ,而 负责 任 计量 的 实施 则 意味 着 对 于 根 
深 蒂 固 的 激励 机 制 和 计量 文化 的 变革 。 

从 作为 负责 任 计量 发 源 地 一 一 欧洲 的 科学 评价 实 
践 以 及 VOSviewer 反映 的 研究 热点 来 看 ,以 《旧金山 宣 
言 光 莱 顿 宣言 % 计 量 潮 报 告 》 三 大 主体 框架 为 核心， 
呼吁 催化 了 21 世纪 初 科学 评价 的 变革 。 目 前 负责 任 
计量 文化 正在 形成 之 中 ,并 呈现 以 研究 质量 为 圆心 . 科 
研 人 员 为 根本 ,学科 规 范 化 为 导向 .影响 力 为 半径 . 引 
用 探索 为 根基 、 补 充 计量 为 参照 的 发 展 趋向 。 虽然 由 
于 科学 评价 的 惯性 ,利益 的 驱使 ,负责 任 计量 实施 过 程 
一 波 三 折 , 但 是 S. Curry 教授 已 公布 《旧金山 宣言 实施 
路 线 图 》、 国 际 研究 管理 学 会 研究 评价 工作 组 主席 E. 
Gadd 开发 的 SCOPE 框架 已 具备 对 评估 目的 的 高 度 敏 
感性 ;ICSR 提出 的 评估 性 问 询 (evaluative inquiry) 已 具 
有 和 较 强 的 可 操作 性 ;指标 工具 包 Metrics Toolkit 已 在 线 
使 用 ;学 术 贡献 分 类 CRediT 已 实行 ;人 工 智能 将 帮助 


我 们 更 完整 地 复原 评价 客体 的 真实 面目 ,而 不 会 因为 
认识 的 片面 性 而 重复 “盲人 与 象 ” 的 故事 。 几 此 种 种 
都 印证 着 负责 任 计量 实施 的 脚步 。 对 此 ,一 方面 ,我 们 
有 理由 相信 :人 负责 任 计量 不 会 重 蹊 “1977 年 E.Garfield 
是 出 防止 滥用 引文 分 析 后 的 四 十 年 中 ,人 们 对 于 种 种 
滥用 充 耳 不 闻 ” ER 。 另 一 方面 ,我 们 必须 清醒 
地 意识 到 ,具有 稳定 性 多 维 性 多 样 性 .透明 性 .更迭 性 
的 理想 的 负责 任 计 量 尚 在 探索 之 中 。 正 如 2020 4 J. 
Wilsdon 教授 在 题 为 "研究 评价 的 新 领域 "的 讲演 中 所 指 
出 的 :现今 我 们 朝 着 正确 的 方向 迈 出 了 第 一 步 , 仍 需 开 
发 更 好 的 指标 ,付出 更 多 的 努力 将 原则 内 入 其 中 ,以 建 
立 更 敏感 的 管理 框架 。” 同 时 ,应 该 指出 的 是 ,与 定量 指 
PRAH EE , 非 结构 化 的 同行 评议 将 最 大 程度 上 接近 被 评价 
对 象 的 真实 状态 ,因此 在 这 个 充满 不 确定 性 的 世界 里 ， 
基于 负责 任 计量 的 捷 思 法 和 以 计量 为 支撑 的 知情 同行 
评议 的 有 机 结合 将 成 为 科学 评价 的 未 来 走向 。 
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Abstract: | Purpose/significance | Based on the three fundamental frameworks of responsible metrics; San 


Francisco Declaration on Research Assessment , Leiden Manifesto for Research Assessment and the Metric Tide , the paper 


interprets the development trend of research evaluation from the perspective of responsible metrics. | Method/ 


process | The articles and core authors from 2012 to 2020 in Web of Science were used and visualized with VOSview- 


er, to reflect the changes of diachronic research hotspots in this field. | Result/conclusion | The timeline and overlay 


views for keywords and authors illustrate that the revolution in research metrics is in progress, and present the devel- 


opment trend with research quality as the center of the circle, researchers as foundation, field-normalization as goal 


orientation , research impact as radius, citation exploration as root, and altmetrics as reference. The conclusion points 


out that research evaluation ruled by responsible metrics is the only way to establish a healthy academic ecosystem, 


however, it is clear that the revolution for deep-rooted academic ecosystem and incentive mechanism is needed. 
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